强化学习代理的长期目标是能够在复杂的现实场景中执行任务。使用外部信息是将代理扩展到更复杂问题的一种方式。然而,使用外部信息的不同方法之间普遍缺乏协作或互操作性。在这项工作中,在回顾受外部影响的方法的同时,我们提出了一个辅助强化学习的概念框架和分类法,旨在通过对学习过程中使用外部信息的各种方法进行分类和比较来促进协作。所提出的分类法详细说明了外部信息源与学习者代理之间的关系,强调了信息分解、结构、保留的过程,以及如何使用它来影响代理学习。除了回顾最先进的方法外,我们还确定了当前使用外部信息的强化学习流,以改进代理的性能和决策过程。这些包括启发式强化学习、交互式强化学习、从演示中学习、
主要关键词